b63d987ccdc814d30cde34c9f84dfefce43ce3da
mt5 mt5 zero-shot
- challenge
- Quiz Question Answering Challenge
- submitter
- Filip Graliński
- submitted
- 2021-10-25 11:37:45.006692 UTC
- file basename
- out
test-B / e95af8727e719c03d60646562b91f90f02e78976
| Metric | Score |
|---|---|
| Acc | 17.36 |
test-A / 203b9d90ec84b82013931cb917108e851a6e3d11
| Metric | Score |
|---|---|
| Acc | 17.92 |
dev-0 / df7f1c04bb9c34c4ecad06a10b68fd0ddb31cebe
| Metric | Score |
|---|---|
| Acc | 16.60 |
worst items
note: the gold standard is taken from the submission itself, not from the challenge data!| # | input | expected output | actual output | test-A Acc |
|---|---|---|---|---|
| 1 | Jak nazywa się pierwsza litera alfabetu greckiego? | alfa | A | 0.00 |
| 2 | Jak nazywa się dowolny odcinek łączący dwa punkty okręgu? | cięciwa | Odcinek łączący | 0.00 |
| 3 | W którym państwie rozpoczyna się akcja powieści „W pustyni i w puszczy”? | w Egipcie | W Polsce | 0.00 |
| 4 | W jakim zespole występowała Hanka w filmie „Żona dla Australijczyka”? | Mazowsze | W zespole zespołu | 0.00 |
| 5 | Który numer boczny nosi czołg Rudy z „Czterech pancernych”? | 102 | - i - | 0.00 |
| 6 | Co budował w Egipcie inżynier Tarkowski, ojciec Stasia? | Kanał Sueski | Egipt | 0.00 |
| 7 | Kwartet – to ilu wykonawców? | czterech czworo 4 | około pięciu | 0.00 |
| 8 | Jak nazywa się pierwiastek o symbolu Bq? | becquerel | Butyrybiokarden | 0.00 |
| 9 | Hymnem którego kraju jest pieśń „Gwiaździsty sztandar”? | Stanów Zjednoczonych USA | Polski | 0.00 |
| 10 | Jak nazywał się sztywny kapelusz męski o zaokrąglonej główce i wąskim lekko uniesionym rondelku, modny w drugiej połowie XIX wieku? | melonik | Kapelusz o wąskim rondelku | 0.00 |
| 11 | Jak nazywa się wypukła albo wklęsła powierzchnia cieczy w pobliżu ścianek naczynia? | menisk | ciecz | 0.00 |
| 12 | Jak nazywał się fizyk, który w 1876 r. wynalazł telefon? | Aleksander Graham Bell | Alfred Nobel | 0.00 |
| 13 | Jak brzmi ulubione powiedzonko klucznika Horeszków Gerwazego? | mopanku | - Szukam | 0.00 |
| 14 | Którego gazu jest najwięcej w powietrzu? | azotu | tlenku węgla | 0.00 |
| 15 | Według przysłowia nos jest dla tabakiery czy tabakiera dla nosa? | tabakiera dla nosa | nos jest dla tabakiery | 0.00 |
| 16 | Kto jest autorem obrazu namalowanego w 1892 r. „Kobiety z Tahiti”? | Paul Gauguin | Leonardo da Vinci | 0.00 |
| 17 | Jak ma na imię brat Fidela Castro, który przejął po nim władzę? | Raul | Fidel Castro | 0.00 |
| 18 | Co znaczy pochodzące z francuskiego słowo aliant? | sojusznik | łączy | 0.00 |
| 19 | Jak nazywa się wzgórze w Paryżu na którym wybudowano bazylikę Sacré-Cœur? | Montmartre | Mont Blanc | 0.00 |
| 20 | Jak z greckiego nazywa się założenie wymagające sprawdzenia? | hipoteza | założenie wymagające sprawdzenia | 0.00 |
| 21 | Co znaczą słowa „Quo vadis”? | dokąd idziesz | Wszystko jest możliwe | 0.00 |
| 22 | Który szesnastowieczny legendarny czarnoksiężnik zwany był polskim Faustem? | Pan Twardowski | Faust | 0.00 |
| 23 | Jak nazywa się trucizna przyrządzona z korzenia szaleju? | cykuta | szał | 0.00 |
| 24 | Jak nazywa się stolica Kuby? | Hawana | Kuba | 0.00 |
| 25 | Jak nazywa się agent brytyjskiego wywiadu, bohater powieści Iana Fleminga? | James Bond | Alfred Porter | 0.00 |
| 26 | W jakim stylu wykonany został nagrobek Kazimierza Jagiellończyka? | gotyckim | W stylu angielskim | 0.00 |
| 27 | W którym mieście zginęła w wypadku samochodowym księżna Diana? | w Paryżu | W Gdańsku | 0.00 |
| 28 | Kto grał postać Maliniaka w „Czterdziestolatku”? | Roman Kłosowski | Andrzej Wajda | 0.00 |
| 29 | Na którym kontynencie występuje ryś iberyjski? | w Europie | Na południowym | 0.00 |
| 30 | Kto gra Kingę Zduńską w serialu „M jak miłość”? | Katarzyna Cichopek | Natalia | 0.00 |
| 31 | W których górach leżą wrota Chałubińskiego? | w Tatrach | W górze Kościelna | 0.00 |
| 32 | Które wrota znajdują się w tytule filmu Romana Polańskiego? | dziewiąte | wrota | 0.00 |
| 33 | Na której japońskiej wyspie znajduje się port Yokohama? | na Honsiu | Na wyspie Honshu | 0.00 |
| 34 | Proszę rozwinąć skrót powstałego w 1918 roku urzędu GUS. | Główny Urząd Statystyczny | GUS | 0.00 |
| 35 | Jak nazywa się przyrząd do palenia i górny kieł dzika? | fajka | - ołówek | 0.00 |
| 36 | W którym filmie Krzysztofa Kieślowskiego zagrali Olaf Lubaszenko i Grażyna Szapołowska? | „Krótki film o miłości” | W Ostatnim człowieku | 0.00 |
| 37 | Dokończ przysłowie: „dobry zwyczaj: nie...”? | pożyczaj | nie | 0.00 |
| 38 | Ile trzeba zjeść z kimś soli, żeby dobrze go poznać? | beczkę | około 10 razy | 0.00 |
| 39 | Które polskie miasto nie od razu zbudowano? | Kraków | Warszawa | 0.00 |
| 40 | Gdzie miały miejsce objawienia z 1917 roku? | w Fatimie | w Warszawie | 0.00 |